Coefficient Alpha: The Resistance of a Classic / Coeficiente Alfa: la Resistencia de un Clásico

Background: During the 20th century the alpha coefficient (α) was widely used in the estimation of the internal consistency reliability of test scores. After misuses were identified in the early 21st century alternatives became widespread, especially the omega coefficient (ω). Nowadays, α is re-emerging as an acceptable option for reliability estimation. Method: A review of the recent academic contributions, journal publication habits and recommendations from normative texts was carried out to identify good practices in estimation of internal consistency reliability. Results: To guide the analysis, we propose a three-phase decision diagram, which includes item description, fit of the measurement model for the test, and choice of the reliability coefficient for test score(s). We also provide recommendations on the use of R, Jamovi, JASP, Mplus, SPSS and Stata software to perform the analysis. Conclusions: Both α and ω are suitable for items with approximately normal distributions and approximately unidimensional and congeneric measures without extreme factor loadings. When items show non-normal distributions, strong specific components, or correlated errors, variants of ω are more appropriate. Some require specific data gathering designs. On a practical level we recommend a critical approach when using the software.(AU)

Antecedentes: Durante el siglo XX el coeficiente alfa (α) fue ampliamente utilizado en el cálculo de la consistencia interna de las puntuaciones de los test. Después de identificar algunos malos usos, a principios del siglo XXI se difundieron alternativas, especialmente el coeficiente omega (ω). Actualmente α resurge como una opción aceptable. Método: Revisamos aportaciones académicas, hábitos de publicación en revistas y recomendaciones de textos normativos con el fin de identificar buenas prácticas en la estimación de la fiabilidad de consistencia interna. Resultados: Para guiar el análisis, proponemos un diagrama de decisión en tres fases, a saber, descripción de los ítems, ajuste del modelo de medida del test y elección del coeficiente de fiabilidad de las puntuaciones. Para su ejecución proporcionamos recomendaciones sobre el uso de los programas R, Jamovi, JASP, Mplus, SPSS y Stata. Conclusiones: Tanto α como ω son adecuados para ítems que se distribuyen de forma aproximadamente normal y medidas aproximadamente unidimensionales y congenéricas sin cargas factoriales extremas. Cuando los ítems tienen otra distribución, un fuerte componente específico o sus errores están correlacionados, resultan más adecuadas variantes de ω. Algunas de ellas requieren diseños específicos de obtención de datos. A nivel práctico recomendamos un uso crítico del software.(AU)

Confiabilidad de una escala de valoración de resúmenes para congresos

Introducción: En 2013, desarrollamos una escala, para evaluar resúmenes de congresos de la Sociedad de Cirujanos de Chile (SOCICH). Objetivo: Determinar consistencia interna y confiabilidad interobservador de una escala para evaluar resúmenes de congresos. Material y Método: Estudio de confiabilidad. Doce cirujanos fueron capacitados de forma virtual durante 8 horas, para aplicar la escala. Una vez finalizado el entrenamiento, se les envió un cuestionario para evaluar contenidos de la capacitación, y varios resúmenescasos para ser evaluados con la escala antes señalada. Se aplicó estadística descriptiva, luego se estimó el grado de acuerdo entre observadores para cada ítem de la escala. Posteriormente, se evaluó el coeficiente de correlación (CCI), utilizando un modelo de dos factores mixtos en el que los efectos de los evaluadores son aleatorios y los ítems fijos; utilizando una definición de acuerdo absoluto. Además, se evaluó la consistencia interna de los ítems utilizando alfa de Cronbach, considerando intérvalos de confianza del 95% (IC 95%). Resultados: Luego de analizar las mediciones de los 9 ítems por los 12 observadores, se verificó que el CCI fue de 0,871; con un IC 95% de 0,700; 0,965. El valor de la consistencia interna fue de 0,7 considerando los 9 ítems, no se recomienda eliminar ningún ítem. Conclusión: La escala tiene buena confiabilidad interobservador y los ítems son consistentes entre sí; por lo que puede ser considerada como un instrumento confiable para la valoración de resúmenes de congresos.

Background: In 2013, we developed a scale to evaluate the abstracts of the congresses of the Society of Surgeons of Chile (SOCICH). Objective: To determine internal consistency and interobserver reliability of a scale to evaluate conference abstracts. Material and Methods: Reliability study. Twelve surgeons were trained virtually for 8 hours, to apply the scale. Once the training was finished, they were sent a questionnaire to evaluate the contents of the training, and several summaries-cases to be evaluated with the aforementioned scale. Descriptive statistics were applied, then the degree of agreement between observers was estimated for each item of the scale. Subsequently, intraclass correlation coefficient (ICC) was evaluated, using a mixed two-factor model where the effects of the evaluators are random and the items are fixed, using a definition of absolute agreement. In addition, the internal consistency of the items was evaluated using Cronbach's alpha, considering 95% confidence intervals (95% CI). Results: After analyzing the measurements of the 9 items by the 12 observers, it was verified that the ICC was 0.871; with a 95% CI of 0.700; 0.965. The internal consistency value was 0.7 considering the 9 items, it is not recommended to delete any item. Conclusions: The scale has good internal consistency and interobserver reliability. Therefore, it can be considered as reliable instrument to be used in the evaluation of abstracts for congresses.

Adaptação transcultural do instrumento "tool to estimate patient's costs" em municípios prioritários do Brasil no controle da tuberculose / Cross-cultural adaptation of the instrument "tool to estimate patient's costs" in priority municipalities of Brazil in tuberculosis control

Introduction: Tuberculosis is historically associated with poverty, generating costs that can influence treatment. Considering the impact of the costs of illness, the importance of adapting the instrument is highlighted. Objective: To adapt transculturally to Brazilian Portuguese the instrument Tool to Estimate Patient's Costs. Methods: Study of the type transcultural adaptation of instrument. The translation followed the criteria described by Herdman, 1998, in order to preserve functional equivalence as much as possible. The questionnaire with cross-cultural adaptation was applied to 77 patients, with at least one full month of treatment for the disease. Results: Instrument was shown with Cronbach Alpha above 0.71 constituting a good tool for measuring the costs of the disease, being necessary modifications. Conclusions: This study suggests the creation of an instrument adapted for the treatment of TB in Brazil, for the evaluation of costs with the illness by tuberculosis.

Introducción: La tuberculosis está históricamente asociada con la pobreza, generando costes que pueden influir en el tratamiento. Considerando el impacto de estas cuantías de la enfermedad, se destaca la importancia de la adaptación del instrumento. Objetivo: Adaptar transculturalmente al portugués brasileño la herramienta "Tool to Estimate Patient's Costs". Métodos: Estudio del tipo adaptación transcultural del instrumento. La traducción siguió los criterios descritos por Herdman (1998), para preservar al máximo la equivalencia funcional. El cuestionario, con adaptación transcultural, fue aplicado en 77 pacientes, con al menos un mes completo de tratamiento para la enfermedad. Resultados: El instrumento presentó resultado de 0,71 con el alfa de Cronbach, constituyéndose en una buena herramienta para medir los costes de la enfermedad, siendo necesarias modificaciones. Conclusiones: Este estudio sugiere la creación de un instrumento adaptado para el tratamiento de la TB en Brasil, para la evaluación de los costes con la enfermedad por tuberculosis.

Introdução: A tuberculose é historicamente associada à pobreza, gerando despesas que podem influenciar no tratamento. Considerando o impacto dos custos do adoecimento, destaca-se a importância da adaptação do instrumento. Objetivo: Adaptar transculturalmente para o português brasileiro o instrumento "Tool to Estimate Patient's Costs". Métodos: Estudo do tipo adaptação transcultural de instrumento. A tradução seguiu os critérios descritos por Herdman (1998), de forma a preservar ao máximo a equivalência funcional. O questionário, com adaptação transcultural, foi aplicado em 77 pacientes, com pelo menos um mês completo de tratamento para a doença. Resultados: Instrumento mostrou-se com alfa de Cronbach acima de 0,71, constituindo-se em uma boa ferramenta para mensuração dos custos da doença, sendo necessárias modificações. Conclusões: Este estudo sugere a criação de um instrumento adaptado para o tratamento da TB no Brasil, para avaliação dos custos com o adoecimento por tuberculose.

Análisis exploratorio de la escala de amor de Sternberg en estudiantes universitarios peruanos / Exploratory analysis of the scale of Sternberg love in university Peruvian students

Resumen El artículo describe las propiedades psicométricas de la escala triangular del amor de Sternberg (1986) (ETAS). La escala fue administrada a 455 estudiantes universitarios de Lima Metropolitana, 145 varones y 310 mujeres, cuyas edades oscilaron entre 16 a 51 años. Los resultados revelan una confiabilidad, mediante el alfa de Cronbach, para la escala total de 0.964. Los factores intimidad, compromiso y pasión presentan índices de confiabilidad de 0.947, 0.922 y 0.848, respectivamente. Todos los coeficientes de confiabilidad son considerados excelentes. El análisis factorial exploratorio indicó que son 3 factores los que subyacen a los ítems, aunque hay evidencia de la existencia de un solo factor. Se concluye que la ETAS presenta adecuadas propiedades psicométricas, recomendándose realizar un análisis factorial confirmatorio con el fin de verificar la estructura interna.

Abstract The article describes the properties psicométricas of the Triangular Scale of the Love of Sternberg (1986) (ETAS). The scale was administered to 455 university students of Metropolitan Lima, 145 males and 310 women, whose ages ranged between 16 to 51 years. The results reveal a reliability, by means of Cronbach's alfa, for the total scale of .964. The factors intimidate, commitment and passion present indexes of reliability of .947.922 and.848 respectively. All the coefficients of reliability are considered to be excellent. The analysis factorial exploratorio suggested that they are three factors those that sublie to the articles, though there is evidence of the existence of an alone factor. One concludes that the ETAS presents suitable properties psicométrica, an analysis being recommended to realize factorial confirmatory in order to check the internal structure.

Los constructos en las investigaciones pedagógicas: cuantificación y tratamiento estadístico / Constructs in pedagogical researches: quantification and statistical treatment

El proceso de medición en las ciencias sociales es esencialmente diferente a aquel que se ejecuta en las ciencias naturales y exactas. En este trabajo se precisan los aspectos característicos de la cuantificación de constructos que se presentan en investigaciones educacionales, haciendo especial énfasis en el proceso de construcción y validación de Tests que se usan para estos fines. Se discuten ejemplos reales, donde se pone de manifiesto la necesidad de combinar los métodos clásicos de la Estadística, con procedimientos psicométricos para un adecuado procesamiento y análisis cuantitativo de constructos psicológicos(AU)

The measurement process in social sciences is very different from that of the natural and exact ones. Through this work, characteristic issues of quantification of constructs, which take place in educational researches, are analyzed, with special attention on the construction and validation of tests used for these ends. Actual examples are discussed where appear the necessity of combining classical methods of statistics with psychometric tools, in order to make a correct processing and quantitative analysis of psychological constructs(AU)

Usos del coeficiente alfa de Cronbach en el análisis de instrumentos escritos / The usage of the Cronbach Coefficient alpha in the Analysis of the Written Instruments

Se realizó un estudio de carácter evaluativo para determinar la precisión de un examen escrito mediante un análisis de fiabilidad. El examen, integrado por 30 preguntas que exploran cierto tipo de conocimiento profesional, se aplicó a 45 personas, y con los puntajes obtenidos se creó una base de datos en SPSS para Windows, versión 16. Se calculó el coeficiente alfa de Cronbach, para diferentes partes del examen y coeficientes de discriminación para determinar las variables más relevantes a los efectos de la confiabilidad del examen. Los resultados principales se presentaron en tablas. Se obtuvo un valor negativo para la confiabilidad del examen, y mediante eliminación de preguntas y cambio de escala de los puntajes, se obtuvo un examen de confiabilidad aceptable. Se concluyó que el análisis de fiabilidad es un procedimiento efectivo para incrementar la precisión de un examen

It was performed a study, to evaluate the precision of a written test by means of a reliability analysis. The test, with 30 questions exploring some kind of professional knowledge, was applied to a set of 45 persons. Using the SPSS for Windows Version 16 software, a data base was created with the scores obtained. We calculated the Cronbach alpha coefficients for different parts of the test and the corresponding indexes of discrimination in order to determine the most relevant variables related with the reliability of the test. The principal findings were presented in statistical tables. A negative value of the reliability coefficient was obtained for the initial test, but, by means of putting out some questions and making appropriate changes in the score scales of them, a new version of the test with a medium level of reliability was obtained. It was concluded that the reliability analysis is an effective tool to increase the precision of a test

Usos del coeficiente alfa de Cronbach en el análisis de instrumentos escritos / The usage of the Cronbach Coefficient alpha in the Analysis of the Written Instruments

Se realizó un estudio de carácter evaluativo para determinar la precisión de un examen escrito mediante un análisis de fiabilidad. El examen, integrado por 30 preguntas que exploran cierto tipo de conocimiento profesional, se aplicó a 45 personas, y con los puntajes obtenidos se creó una base de datos en SPSS para Windows, versión 16. Se calculó el coeficiente alfa de Cronbach, para diferentes partes del examen y coeficientes de discriminación para determinar las variables más relevantes a los efectos de la confiabilidad del examen. Los resultados principales se presentaron en tablas. Se obtuvo un valor negativo para la confiabilidad del examen, y mediante eliminación de preguntas y cambio de escala de los puntajes, se obtuvo un examen de confiabilidad aceptable. Se concluyó que el análisis de fiabilidad es un procedimiento efectivo para incrementar la precisión de un examen(AU)

It was performed a study, to evaluate the precision of a written test by means of a reliability analysis. The test, with 30 questions exploring some kind of professional knowledge, was applied to a set of 45 persons. Using the SPSS for Windows Version 16 software, a data base was created with the scores obtained. We calculated the Cronbach alpha coefficients for different parts of the test and the corresponding indexes of discrimination in order to determine the most relevant variables related with the reliability of the test. The principal findings were presented in statistical tables. A negative value of the reliability coefficient was obtained for the initial test, but, by means of putting out some questions and making appropriate changes in the score scales of them, a new version of the test with a medium level of reliability was obtained. It was concluded that the reliability analysis is an effective tool to increase the precision of a test(AU)

Cuestionario socioeconómico aplicado a grupos familiares del distrito capital para investigaciones relacionadas con la salud pública / Socioeconomic questionnaire applied to family groups of the Capital District for research related to public health

La evaluación de aspectos socioeconómicos en comunidades, se hace mediante el método Graffar-Méndez Castella no (1994), éste incluye cuatro variables y no refleja la realidad de la Condición Social de las familias. Se diseño el Cuestionario Condición Socioeconómica (CCSE), con variables que dibujaran una realidad adecuada de lo observado. Se aplicó desde 1996, con transformaciones: 1999, 2004 y 2005, a 959 familias. En el CCSE, se incluyeron aspectos relacionados con características del grupo familiar, ha cinamiento, dependencia, ingreso familiar, tipo y tenencia de la vivienda, número de ambientes, suministro y frecuencia con que se recibe el agua, servicios públicos en la comunidad. A cada una se le asignó un puntaje, cuya suma permitió definir cuatro categorías para la Condición Socioeconómica. Se incorporó el nivel de instrucción del jefe del hogar y de la madre, fuente de ingreso, gastos en alimentación, con el fin de comparar con Graffar, cuartos para dormir y número de servicios en el hogar. El objetivo es dar a conocer un cuestionario, para ser utilizado en investigaciones; se validó mediante formas paralelas, se utilizó el coeficiente alfa de Cronbach, haciendo uso de SPSS para Win dows. Los resultados: Confiabilidad alta (0,80< a < 0,89). Las correlaciones, para la validación, entre condición so - cioeconómica y estrato social, dieron: 2001 (r = 0,85), 155; 2004 (r = 0,70), 157 y 2005 (r = 0,93), 112 familias, to das del Área Metropolitana de Caracas. Se concluye que: el cuestionario es confiable, válido y se puede utilizar.

The evaluation of aspects socioeconomic in communities, one becomes by means of the Graffar-Méndez Castellano me thod (1994), this one includes four variables and it does not reflect reality of the Social Condition of the families. Design Questionnaire Socioeconomic Condition (QSEC), with variables that drew a reality adapted of the observed thing. It was applied from 1996, with transformations: 1999, 2004 and 2005, to 959 families. In the QSEC, they included re lated aspects with characteristics of the familiar group, overcrowding, dependency, familiar entrance, type and pos session of the house, number of atmospheres, provision and frequency whereupon the water is received, services public in the com munity. To each one a score was assigned to him, whose sum allowed to define four categories for Socioeco no mic Condition. One got up the level of instruction of the head of the home and the mother, source of entrance, ex pen ses in feeding, with the purpose of comparing with Graf far, quarters to sleep and number of services in the home. Objective it is to present a questionnaire, to be used in in vestigations; it was validated by means of parallel forms, the coefficient was used alpha of Cronbach, doing use of SPSS for Win dows. Results: High trustworthiness (0,80 < a < 0,89). The correlations, for the validation, between so cioeco nomic condition and social layer, gave: 2001 (r = 0.85), 155; 2004 (r = 0.70), 157 and 2005 (r = 0.93), 112 families, all of the Me tropolitan Area of Caracas. It concludes that: the questionnaire is reliable, valid and it is possible to be used.

Coeficientes de confiabilidad de instrumentos escritos en el marco de la teoría clásica de los tests / Reliability coefficient of written tools in the frame of the classical theory of tests

Rvaluar la confiabilidad en el marco de la teoría clásica de los tests y precisar las condiciones bajo las cuales el coeficiente alfa de Cronbach constituye la mejor alternativa. El coeficiente alfa de Cronbach es el recurso numérico más utilizado para evaluar la confiabilidad de instrumentos escritos. Como prueba de esto, baste decir que desde su publicación en 1951 hasta la fecha, ha sido citado más de 5 590 veces. Sin embargo, se ha comprobado que en no pocas situaciones este coeficiente no es la mejor alternativa para evaluar la confiabilidad. Se discutieron varias alternativas para la evaluación de la confiabilidad y se precisaron las condiciones bajo las cuales el coeficiente alfa de Cronbach constituye la mejor alternativa. La teoría clásica de los tests constituye un modelo apropiado para desarrollar el concepto de confiabilidad y las diferentes fórmulas de cálculo de mayor utilidad en las aplicaciones, el coeficiente alfa de Cronbach es el indicador más utilizado para cuantificar la consistencia interna de los tests y es necesario tener en cuenta los supuestos que sustentan la correcta aplicación del coeficiente alfa para hacer una interpretación adecuada de su valor numérico(AU)

To assess reliability in the frame of the classical theory of tests and to exactly specify the conditions under which Cronbach's alpha coefficient is the best option. Cronbach's alpha coefficient is the most used numerical resort to evaluate the reliability of written tools. As a proof, it is enough to say that from its publication in 1951 up to now, it has been cited more than 5 590 times. However, it has been proved that this coefficient is not always the best option to assess reliability. Various alternatives were discussed for the assessment of reliability, and the conditions under which Cronbach's alfa coefficient is the best choice were determined. The classical theory of tests is an appropriate model to develop the concept of reliability and the calculation formulae more useful for the applications. This coefficient is the most used indicator to quantify the internal consistency of tests, and it is necessary to bear in mind the suppositions that support the correct application of alpha coefficient to make a proper interpretation of its numerical value(AU)

Coeficientes de confiabilidad de instrumentos escritos en el marco de la teoría clásica de los tests / Reliability coefficient of written tools in the frame of the classical theory of tests

Evaluar la confiabilidad en el marco de la teoría clásica de los tests y precisar las condiciones bajo las cuales el coeficiente alfa de Cronbach constituye la mejor alternativa. El coeficiente alfa de Cronbach es el recurso numérico más utilizado para evaluar la confiabilidad de instrumentos escritos. Como prueba de esto, baste decir que desde su publicación en 1951 hasta la fecha, ha sido citado más de 5 590 veces. Sin embargo, se ha comprobado que en no pocas situaciones este coeficiente no es la mejor alternativa para evaluar la confiabilidad. Se discutieron varias alternativas para la evaluación de la confiabilidad y se precisaron las condiciones bajo las cuales el coeficiente alfa de Cronbach constituye la mejor alternativa. La teoría clásica de los tests constituye un modelo apropiado para desarrollar el concepto de confiabilidad y las diferentes fórmulas de cálculo de mayor utilidad en las aplicaciones, el coeficiente alfa de Cronbach es el indicador más utilizado para cuantificar la consistencia interna de los tests y es necesario tener en cuenta los supuestos que sustentan la correcta aplicación del coeficiente alfa para hacer una interpretación adecuada de su valor numérico.

To assess reliability in the frame of the classical theory of tests and to exactly specify the conditions under which Cronbach's alpha coefficient is the best option. Cronbach's alpha coefficient is the most used numerical resort to evaluate the reliability of written tools. As a proof, it is enough to say that from its publication in 1951 up to now, it has been cited more than 5 590 times. However, it has been proved that this coefficient is not always the best option to assess reliability. Various alternatives were discussed for the assessment of reliability, and the conditions under which Cronbach's alfa coefficient is the best choice were determined. The classical theory of tests is an appropriate model to develop the concept of reliability and the calculation formulae more useful for the applications. This coefficient is the most used indicator to quantify the internal consistency of tests, and it is necessary to bear in mind the suppositions that support the correct application of alpha coefficient to make a proper interpretation of its numerical value.

Empirical knowledge of the community inhabitants near Cachoeirinha Municipal Park (Iporá, State of Goiás) / Conhecimento empírico dos moradores da comunidade do entorno do Parque Municipal da Cachoeirinha (Iporá-Goiás) - DOI: 10.4025/actascibiolsci.v29i2.589

The Cachoeirinha Municipal Park (C.M.P.) situated in the periphery of the Iporá, State of Goiás, is surrounded by a popular quarter and rural properties. Individuals who lived near C.M.P. area were interviewed to investigate their empirical knowledge on the availability of natural resources of the park. The 57 interviewed families showed no relation of subsistence with the park. They occasionally look for medicinal and ornamental plants and/or fruits from the riparian forest. They usually use it as leisure area, where they can fish for fun and food, among other activities. According to the inhabitants, there are about 41 animal species circulating in the limits of the park and of their homes. The survey questions measured in a reliable way (Cronbach Alpha = 0.54) the behavior and attitudes of the inhabitants around the C.M.P., revealing an environmental perception on the non-traditional communities.

O Parque Municipal da Cachoeirinha (P.M.C.) localiza-se na periferia da cidade de Iporá, Estado de Goiás, circundado por um bairro popular e por propriedades rurais. Os moradores do entorno do P.M.C. foram entrevistados a fim de investigar o seu conhecimento empírico sobre a disponibilidade de recursos naturais do P.M.C. As 57 famílias entrevistadas demonstraram não manter qualquer relação de subsistência com o Parque; esporadicamente, procuram por plantas medicinais, ornamentais e/ou frutos da floresta ciliar. Também o utilizam como área de lazer, onde praticam pescaria para diversão e para se alimentar, entre outras atividades. De acordo com os moradores, cerca de 41 espécies de animais circulam nos limites do Parque e de suas moradias. As perguntas do questionário mediram fidedignamente (Alfa de Cronbach = 0,54) as atitudes e o comportamento dos moradores do entorno do P.M.C., revelando percepção ambiental e conhecimento ecológico de comunidades não-tradicionais.

Aproximación al uso del coeficiente alfade Cronbach / An Approach to the Use of Cronbach’s Alfa

Introducción: Las escalas se usan frecuentemente en la investigación y en la práctica clínica de la psiquiatría. No obstante, todas las escalas deben ser formalmente validadas antes, con el propósito de conocer de las propiedades psicométricas en una población específica. Descripción: Las escalas pueden ser validadas con el uso de un patrón de referencia o sin él; la segunda opción es la única forma de validar algunos instrumentos. Establecer la consistencia interna de una escala es una aproximación a la validación del constructo y consiste en la cuantificación de la correlación que existe entre los ítems que la componen. Valores de alfa de Cronbach entre 0,70 y 0,90 indican una buena consistencia interna. La determinación del alfa de Cronbach se indica para escalas unidimensionales entre tres y veinte ítems. Se debe informar este valor cada vez que se emplee la escala y puede usarse como única medida de validez cuando es difícil una validación con un patrón de referencia.

Introduction: Scales are frequently used in clinical and research psychiatry. However, scales must be validated in order to know their psychometric properties when they are administered to special populations. Description: Establishing the internal consistency of a scale is an approach to validate its construct. That is, the quantification of the correlation among the items includes in a scale. Cronbach’ alpha values between 0.70 and 0.90 suggest a good internal consistency. The Cronbach’ alpha coefficient may be estimated when a three- to twenty-item one-dimensional scale is administered and particularly when it is difficult to conduct a validation study against a gold standard.